YOLO-PEFT: Parameter-Efficient Fine-Tuning on YOLO Family
YOLO-PEFT：目标检测器结构感知的参数高效微调框架
🧭 检测器微调 · 结构化放置规划
Tencent · Xiamen University
将适配器放置形式化为可审计的约束规划问题，在实时检测器上实现结构化 PEFT，避免手动试错
📌 工作参考价值（4 点）
- 该方法将适配器插入点选择从人工试错转变为基于显式约束（算子类型、语义角色、图接口）的自动化规划，可借鉴到推荐系统的大模型微调中，例如在 Transformer 推荐模型的不同层或位置上自动选择 LoRA/Adapter 模块，避免盲目尝试。
- 规划时引入“可审计性”和“拒绝提议”机制，对于不合理的微调请求直接拒绝并给出原因，这一安全设计可推广至线上服务中模型的增量更新场景，防止灾难性遗忘或性能断崖。
- 资源预算约束下的模块选择策略对于电商搜索模型的多变体部署（如不同类目、不同延迟要求）有帮助，可以生成满足 GPU 内存或延迟预算的一组适配器配置，降低管理成本。
- 整个流程保持训练-保存-合并-导出路径，确保与标准推理部署兼容，这对实际业务中快速试验和上线至关重要，可参考其工程化流水线设计。